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追踪 手势 对 视 空间 学 习 的 增强 作用 
Ril RG 
(陕西 师范 大 学 心理 学 院 ; 陕西 省 行为 与 认 知 神经 科学 重点 实验 室 , 西安 710062) 

摘 要 本 研究 采用 地 图 学 习 任 务 范式 考察 了 追踪 手势 对 视 空间 学 习 的 影响 和 增强 ,并 试图 从 追踪 手势 的 角度 导 
找 能 够 有 效 促进 操作 者 视 空间 学 习 的 方法 。 实 验 1 探究 了 产生 追踪 手势 对 视 空间 学 习 的 增强 作用 ; 实验 2 RAE 
挡 范式 考察 了 产生 追踪 手势 增强 视 空间 学 习 的 作用 机 制 ， 发 现 产生 追踪 手势 所 提供 的 视觉 信息 和 感觉 运动 信息 共 
同 作用 于 视 空间 学 习 过 程 ; 实验 3 从 具 身 认 知 的 视角 探索 了 基于 追踪 手势 的 视 空间 学 习 增 强 方式 ,发 现 以 自我 为 
参照 产生 追踪 手势 可 以 更 好 地 增强 个 体 的 视 空间 学 习 。 本 研究 结果 很 好 地 支持 并 补充 了 手势 的 具 身 认 知 理论 。 
关键 词 产生 追踪 手势 , 视 空间 学 习 ， 表象 维持 理论 , 手势 的 具 身 认 知 理论 
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问题 提出 


视 空间 能 力 (visuo-spatial ability) 是 在 人 脑 中 形 
成 外 部 世界 的 空间 模型 ， 并 通过 模型 范式 的 转化 在 
头脑 中 进行 思考 的 信息 加 工 能 力 ,是 视 知 党 和 空间 
知觉 两 方面 能 力 的 整合 ( 李 洪 玉 ,， 林 尝 德 , 2005)。 视 
觉 加 工 (visual processing) 主 要 是 整合 物体 的 多 种 特 
征 ， 如 形状 、 深 度 、 质 地 、 颜色 、 状 态 和 背景 等 ,将 
这 些 信息 通过 视觉 通路 传输 至 人 脑 ， 人 脑 进行 辨 
别 、 分 析 、 存 储 、 提 取 以 及 应 用 ( 赵 微 ， 田 创 , 2008; 
Mathewson, 1999); 空间 知觉 (spatial perception) 则 
是 通过 视觉 进行 识别 、 定 位 和 思考 来 分 辨 方向 ,或 
通过 空间 想象 对 视觉 表象 进行 思考 、 检 验 、 转 换 和 
保持 ， 从 而 实现 对 空间 关系 的 把 握 和 转换 
(Mathewson, 1999)。 一 般 来 讲 ， 一 些 特殊 职业 需要 
强大 的 视 空间 能 力 ， 如 飞行 员 、 航 天 员 和 外 科 医 生 
等 。 但 日 常生 活 中 , 我 们 也 经 常 需要 使 用 视 空间 能 
力 ， 例 如 , 我 们 需要 在 陌生 环境 中 进行 空间 导航 或 
找到 回 家 的 路 。 因 此 , 视 空间 能 力 不 仅 对 飞行 员 和 
航天 员 等 特殊 职业 很 重要 ,而 且 在 我 们 日 常 空间 导 
航 、 估 测 高 度 和 距离 的 过 程 中 也 起 着 非常 重要 的 作 
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用 (Wai et al., 2009), 

以 往 研 究 发 现 ， 对 于 视 空间 能 力 较 低 或 偏好 于 
使 用 地 标 策略 的 个 体 而 言 ， 在 进行 视 空 间 学 习 时 他 
们 可 能 更 多 地 使 用 地 标 策 略 (van der Ham et al., 
2020)。 然 而 ， 当 所 处 的 陌生 环境 中 地 标 或 参照 物 较 
少时 ， 这 些 视 空间 能 力 较 低 的 个 体 常常 容易 迷失 方 
向 。 那 么 对 于 这 些 个 体 而 言 ， 如 何 提 高 其 视 空 间 能 
力 值得 我 们 进一步 探究 。 前 人 曾 通 过 一 些 方法 试图 
帮助 个 体 提高 其 视 空间 学 习 能 力 ， 这 些 方法 主要 包 
括 使 用 空间 语言 (Brunyk et al.，2008) 和 描绘 地 图 
(Uttal & O'Doherty, 2008; So et al., 2014) 等 。 而 当 人 
们 在 解决 问题 时 也 常 常会 使 用 自己 身体 和 手 的 动 
YE, 例如 和 手势。 手势 是 在 进行 思考 、 推 理 和 说 话 等 
需要 努力 的 认 知 任务 时 所 产生 的 手 部 动作 (Alibali 
et al., 2001)， 它 反映 了 个 体 的 内 部 认 知 过 程 。 有 研 
究 者 认为 ,手势 在 个 体 的 内 部 认 知 过 程 中 起 重要 作 
用 (Marstaller & Burianová, 2013)。 且 近年 来 越 来 越 
多 的 证 据 表明 ,手势 不 仅 预 示 着 学 习 ， 还 能 在 学 习 
的 过 程 中 起 到 推动 作用 (Goldin-Meadow，2011)， 如 
手势 可 以 通过 影响 学 习 环 境 或 直接 影响 学 习 者 本 
身 来 间接 地 促进 学 习 。 此 外 , 手势 也 可 以 作为 认 知 


HAI A (72192931); 载 人 航天 工程 航天 医学 实验 领域 项 


1009 


1010 心 理 


ad A vi Af HOT 
ChinaX iv@ ESA Fl 


学 R 


第 54 卷 


系统 的 外 部 工具 替代 和 支持 其 他 认 知 过 程 ， 即 手势 
作为 外 部 身体 行为 可 能 对 内 部 认 知 过 程 起 到 有 利 
作用 (Pouw et al., 2014)。 如 So 等 人 (2014) 发 现 , 追 
踪 手 势 可 以 传达 视 空间 信息 。 因 此 , 手势 可 能 对 视 
空间 学 习 起 到 一 定 的 增强 作用 。 

手势 主要 包括 追踪 手势 (tracing gestures)、 描 述 
性 手势 (depictive gestures)、 隐 喻 性 手势 (metaphorical 
gesture) 和 节拍 手势 (beat gestures) 四 类 ( 见 表 1) 
(Cassell & McNeill, 1991)。 其 中 , 追踪 手势 是 一 种 
指向 某 方向 或 某 物 体 的 指示 手势 , 与 视 空间 信息 的 
关系 最 为 密切 ， 因 此 本 研究 主要 关注 与 视 空间 学 习 
相关 的 追踪 手势 。 前 人 关于 追踪 手势 作用 的 研究 主 
要 围绕 观察 追踪 手势 和 产生 追踪 手势 展开 ， 其 中 观 
察 追 踪 手 势 是 指 通 过 让 被 试 观察 视频 中 他 人 的 指示 
性 手势 来 帮助 学 习 路 线 (Wermeskerken et al., 2016); 
而 产生 追踪 手势 是 指 被 试 在 学 习 地 图 路 线 时 做 出 
同步 的 指示 性 手势 (co-thought gestures) 来 帮助 学 习 
(So et al., 2014)。 

以 往 研 究 发 现 ,观察 手势 有 助 于 提高 儿童 平面 
路 线 记 忆 的 效果 ,其 中 ,观察 追踪 手势 有 助 于 记忆 
路 线 和 方向 ， 而 观察 描述 性 手势 有 助 于 提高 对 道路 
名 称 的 记忆 (Wermeskerken et al., 2016)。 即 使 路 线 
只 通过 口头 形式 呈现 的 ,3~4 岁 的 儿童 仍 可 以 通过 
观察 特定 的 手势 来 对 路 线 方向 进行 编码 (Austin & 
Sweller, 2014)， 这 说 明说 话 人 所 提供 的 带 有 空间 信 
息 的 手势 会 显著 影响 听 者 的 空间 记忆 和 任务 表现 
(Austin & Sweller, 2017). 

产生 追踪 手势 也 是 促进 空间 信息 编码 的 有 效 
FE, So 等 人 (2014) 发 现 用 手势 比划 平面 路 线 比 在 
纸 上 画 路 线 和 仅 在 脑 中 模拟 路 线 的 记忆 效果 更 好 ， 
这 可 能 是 由 于 手势 帮助 个 体 摆脱 了 即时 表征 ,构建 
了 对 路 线 更 丰富 的 心理 表征 ， 从 而 巩固 了 空间 序列 ， 
对 空间 表征 产生 了 更 强大 的 影响 。 研究 者 认为 空间 
表象 具有 短期 记忆 功能 ， 而 手势 可 能 有 助 于 维持 空 
间 表 象 。 当 不 需要 空间 表象 时 ， 如 在 有 直接 视觉 刺 


激 的 情况 下 ,个体 对 手势 的 依赖 就 会 减少 或 消除 
(Wesp et al., 2001)。 

观察 手势 和 产生 手势 究竟 何者 的 促进 作用 更 
强 ? de Nooijer 等 人 (2013) 的 研究 发 现 ,在 词汇 学 
习 过 程 中 ， 观 察 和 产生 描述 性 手势 都 可 以 起 到 促进 
TEAR, 且 产 生 比 观察 描述 性 手势 更 有 效 。 那 么 在 视 
空间 学 习 过 程 中 ,产生 追踪 手势 是 否 比 观 察 追 踪 手 
势 的 作用 更 强 ?” 这 个 问题 值得 我 们 探讨 。 

关于 手势 增强 机 制 的 解释 ， 与 之 相关 的 主要 有 
两 种 理论 : 一 种 是 Wesp 等 人 (2001) 提 出 的 表象 维 
持 理论 (image maintenance theory, IMT), 该 理论 认 
为 手势 的 认 知 作用 先 于 相应 的 语言 表达 , 前 语言 思 
维 过 程 中 激活 的 图 像 如 果 不 断 更 新 就 会 迅速 衰减 ， 
而 手势 是 重新 激活 空间 信息 的 一 种 手段 。Wesp 等 
人 通过 实验 发 现 ， 手势 在 认 知 加 工 中 的 作用 是 通过 
空间 表象 建立 空间 信息 的 前 语言 表征 来 实现 的 ， 即 
手势 能 维持 空间 表象 。 该 理论 可 以 很 好 地 解释 观察 
手势 对 视 空间 学 习 的 促进 作用 。 男 一 种 是 Clark 
(2008) 提 出 的 手势 的 具 身 认 知 理论 (the embedded- 
extended cognition perspective of gesture)， 该 理论 
认为 手势 是 耦合 神经 -身体 的 重要 组 成 部 分 ， 它 与 
认 知 相关 ， 是 思维 过 程 的 延伸 ， 可 以 影响 正在 进行 
的 思考 和 推理 。 如 同 使 用 笔记 本 一 样 , 手势 提供 
一 种 稳定 的 身体 存在 感 (physical presence), 能 帮助 
维持 认 知 的 稳定 性 , 例如 在 词汇 学 习 的 过 程 中 产生 
描述 性 手势 比 仅 观察 手势 更 为 有 效 (de Nooijer et 
al., 2013)。 从 前 人 研究 中 可 以 看 出 , 产生 手势 对 个 
体 的 内 部 认 知 过 程 而 言 是 非常 有 价值 的 ,因为 它 可 
以 减轻 认 知 负荷 Pouw et al., 2014; Pouw & Hostetter, 
2016)。 也 就 是 说 ， 手势 可 以 提供 稳定 的 本 体感 受 和 
视觉 反馈 ， 以 产生 或 维持 与 任务 相关 的 信息 。 因 此 
本 人 研究 假设 产生 追踪 手势 对 认 知 表现 如 视 空间 学 
习 的 影响 比 观 察 手 势 的 作用 更 强 。 

尽管 前 人 研究 已 经 确立 了 观察 追踪 手势 在 平面 
地 图 视 空间 学 习 过 程 中 的 有 益 影响 (Wermeskerken 


表 1 手势 类 型 
追踪 手势 追踪 手势 也 称 为 指示 性 手势 (deictic gesture)， 主 要 是 指向 某 方 向 或 某 物 体 的 手势 ， 可 以 用 来 表示 事物 的 相对 位 置 , 也 


可 以 是 指向 的 动作 , 与 空间 信息 相关 ， 可 以 支持 视觉 空间 处 理 (So et al., 2014; So et al., 2015)。 


描述 性 手势 ”描述 性 手势 也 称 为 表象 性 手势 (representational gestures), 主要 通过 提供 某 种 视觉 动作 来 描述 某 个 具体 对 象 。 描 述 性 


隐喻 性 手势 ”隐喻 性 手势 传达 的 是 一 种 没有 物理 形式 抽象 的 信 ， 


手势 提供 了 人 额外 的 信息 ,能 帮助 处 理 更 深层 的 意义 或 语 境 (Alibali & Nathan, 2012)。 
息 ， 比 如 “故事 一 直 在 继续 ”， 同 时 说 话 人 的 手 模仿 着 滚动 的 动作 。 


节拍 手势 节拍 手势 是 一 种 


说 话 者 的 手 也 在 快速 移动 。 这 种 手势 也 被 称 为 强 


具有 节奏 性 的 动作 ,不 包含 明显 的 语义 信息 ,强调 语音 的 韵律 或 节奏 。 例 如 ,在 讲 “ 书 ”一 词 的 同时 ， 
IPA, 它 具 有 元 叙事 功能 , 反映 了 话语 的 结构 。 
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et al., 2016), 但 产生 追踪 手势 在 视 空间 学 习 中 作用 
的 研究 较 少 ， 观 察 追 踪 手 势 和 产生 追踪 手势 何者 能 
更 好 地 增强 视 空 间 学 习 还 未 可 知 。 其 次 , 前 人 对 立 
体 地 图 的 研究 较为 缺乏 ,平面 地 图 能 够 提供 一 种 俯 
梧 式 的 地 图 场景 ,可 以 帮助 个 体 更 好 地 形成 认 知 地 
图 (van der Ham et al., 2020)， 因 此 平面 地 图 的 路 线 
学 习 可 能 更 多 与 视觉 相关 ， 而 立体 地 图 路 线 学 习 则 
仿照 步行 时 第 一 视角 (Meneghetti et al., 2016)， 与 真 
实 场景 中 的 路 线 学 习 更 为 相似 ,有 旦 沉浸 感 更 强 , 不 
仪 涉及 到 视觉 信息 ,还 可 能 与 感觉 运动 信息 及 身体 
存在 感 有 关 ， 可见 平 面 地 图 与 立体 地 图 的 路 线 学 习 
方式 有 一 定 差异 , 追踪 手势 在 平面 地 图 路 线 学 习 起 
促进 作用 的 结论 是 否 适 用 于 立体 地 图 还 不 确定 ， 且 
探究 产生 追踪 手势 对 立体 地 图 路 线 学 习 的 影响 可 
以 更 好 地 帮助 个 体 应 对 现实 生活 中 的 视 空间 学 习 ， 
因此 探讨 产生 追踪 手势 对 立体 地 图 路 线 学 习 的 作 
用 不 仅 有 一 定 的 理论 意义 ， 更 有 其 应 用 价值 。 再 次 ， 
前 人 的 理论 研究 主要 认为 手势 可 以 帮助 维持 信息 ， 
以 提高 认 知 表现 ,但 维持 何 种 信息 并 没有 定论 ， 即 
手势 的 作用 机 制 还 没有 得 到 相应 的 揭示 。 最 后 ， 前 
人 研究 中 多 提 及 女性 的 空间 能 力 相 对 较 低 ， 且 在 地 
图 学 习 任 务 中 更 偏好 于 使 用 地 标 策略 (van der Ham 
et al., 2020), 那么 产生 手势 是 否 能 提高 女性 的 视 空 
间 学 习 能 力也 值得 我 们 进一步 探讨 。 

同时 ,近年 来 随 着 计算 机 和 虚拟 现实 技术 的 不 
断 发 展 ， 视 空间 学 习 任 务 开始 更 多 地 在 模拟 现实 的 
场景 中 开展 , 增强 了 实验 结果 在 现实 场景 中 的 适用 
性 和 此 类 研究 的 生态 效 度 ， 也 能 更 好 地 测量 被 试 的 
视 空 间 学 习 能 力 ， 例 如 莫 里 斯 水 迷宫 实验 (the Morris 
water maze)、 海 克 斯 迷宫 任务 (the Hex maze)、 地 图 
阅读 范式 (speeded map-reading test) 和 地 图 学 习 任 
务 (map learning task) 等 。 其 中 ,地 图 学 习 任 务 作为 
视 空间 学 习 任 务 的 典型 范式 之 一 , 包括 平面 地 图 路 
线 学 习 和 立体 地 图 路 线 学 习 两 种 类 型 , 为 众多 研究 
者 广泛 使 用 。 

本 研究 采用 地 图 学 习 任 务 来 探究 追踪 手势 对 
视 空间 学 习 的 增强 作用 、 增 强 机 制 和 增强 方式 三 个 


身 认 知 理论 ,本 研究 认为 相 较 于 观察 手势 , 产生 追 
踪 手 势能 够 提供 多 种 类 型 的 感觉 信息 ， 并 增强 身体 
存在 感 ， 从 而 可 以 更 好 地 支持 内 部 认 知 过 程 ; (3) 基 
于 手势 的 具 身 认 知 理论 和 前 人 对 词汇 学 习 过 程 中 
观察 和 产生 手势 作用 的 比较 , 本 研究 认为 在 视 空 间 
学 习 中 ,以 自我 为 参照 的 产生 追踪 手势 是 一 种 效果 
更 佳 的 视 空 间 学 习 增强 方式 。 


2 实验 1: 产生 追踪 手势 对 视 空 间 
学 习 的 影响 


由 于 以 往 关 于 手势 对 视 空间 学 习 影 响 的 研究 
主要 集中 平面 地 图 的 路 线 学 习 ， 而 产生 追踪 手势 在 
立体 地 图 路 线 学 习 中 的 作用 却 少 有 报道 , 因此 实验 
1 首先 通过 比较 产生 追踪 手势 在 平面 地 图 和 立体 地 
图 路 线 学 习 中 的 作用 , 来 探讨 产生 追踪 手势 对 平面 
地 图 和 立体 地 图 视 空 间 学 习 的 影响 是 否 存在 差异 。 

实验 1 采用 2 (地 图 类 型 : 平面 地 图 、 立 体 地 图 ) x 
2 (手势 : 无 手势 、 产 生 追 踪 手 势 ) x 2 (性 别 : 男 、 女 ) 
的 实验 设计 ， 比 较 了 产生 追踪 手势 在 平面 地 图 和 立 
体 地 图 路 线 学 习 中 的 作用 ,探究 产生 追踪 手势 在 立 
体 地 图 视 空间 学 习 中 的 作用 是 否 与 平面 地 图 相似 。 
2.1 实验 方法 
2.1.1 pit 

使 用 G*Power 对 样本 量 进 行 计 算 ，effect size 
f=0.4, a = 0.05, 1 — B = 0.8, 计算 出 所 需 样 本 量 为 
52 人 。 

根据 计算 出 的 样本 量 招募 了 陕西 省 某 高 校 53 
名 大 学 生 作为 被 试 参加 实验 。 被 试 均 为 右 利 手 ， 年 
WOE 17 到 26 岁 之 间 (M = 19.77 岁 ), 其 中 男生 20 
名 , 女生 33 名 。 参 加 实验 的 被 试 视力 /矫正 视力 正 
常 ， 无 色盲 或 色弱 。 被 试 之 前 没有 参与 过 相同 或 相 
似 的 研究 ， 且 不 知晓 研究 目的 。 

2.1.2 ”实验 材料 

实验 1 采用 地 图 学 习 任 务 作 为 主要 任务 范式 。 

使 用 Mazesuite (Ayaz et al., 2008; www.mazesuite. 
com) 创 建 虚 拟 环境 ， 虚拟 环境 中 墙 体高 2.5 K, 全 


问题 。 首先 实验 1 探究 了 产生 追踪 手势 是 否 对 视 空 
间 学 习 有 增强 作用 ,接着 实验 2 采用 遮挡 范式 考察 
了 产生 追踪 手势 对 视 空间 学 习 的 增强 机 制 , 最 后 实 
验 3 从 具 身 认 知 的 视角 探索 了 基于 追踪 手势 的 视 空 
间 学 习 增 强 方式 。 本 研究 假设 : (1) 基 于 前 人 对 观察 
手势 促进 作用 的 研究 ， 本 研究 认为 产生 追踪 手势 
可 以 对 视 空间 学 习 起 到 增强 作用 ; (2) 基 于 手势 的 上 


= 


加 


4 


部 采用 草 纹 ， 所 有 拐角 缘 为 90°, 地 面 全 部 使 用 砖 
纹 ， 天 空 使 用 默认 的 灰色 ,场景 如 图 1(b) 所 示 。 
平面 地 图 路 线 部 分 使 用 Adobe Photoshop CC 
2019 绘制 地 图 及 路 线 作为 学 习 材料 ， 分 别 在 起 点 
和 终点 进行 了 相应 标注 ， 如 图 1(a) 所 示 。 立 体 地 图 
路 线 部 分 使 用 Bandicam 录制 由 主 试 操纵 的 在 虚拟 
立体 地 图 中 的 动态 行走 路 线 作为 学 习 材料 。 在 实验 
中 ,被 试 将 以 第 一 人 称 视角 完成 任务 。 场 景 中 的 
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图 1 (a) 平 面 路 线 示 例 ; (b) 虚 拟 场景 示例 


步行 速度 设置 为 2.5 米 / 秒 , 与 现实 中 步行 速度 相 
近 。 被 试 使 用 键盘 上 的 上 下 左右 键 来 进行 操纵 。 共 
有 8 条 路 线 ， 分 别 绘制 在 8 张 略 有 不 同 但 结构 相似 
的 地 图 上 ,其 中 , 平面 地 图 4 RKR, 立体 地 图 4 
条 路 线 ， 每 条 路 线 起 点 、 终 点 以 及 路 径 均 不 相同 。 
每 条 路 线 都 有 8 个 拐弯 、9 段 路 径 ， 路 线 缘 无 交叉 。 
2.1.3 ”实验 程序 

实验 采用 计算 机 呈现 刺激 并 按键 操作 的 形式 
进行 。 被 试 进 入 实验 室 后 以 标准 坐姿 坐 好 ， 保 持 
60cm 视 距 。 签 署 知情 同意 书后 ， 主 试 首 先 向 实验 
对 象 说 明 实 验 操作 中 的 注意 事项 ,然后 通过 示例 的 
方式 给 被 试 讲解 操作 方法 ， 并 让 被 试 尝试 进行 操作 ， 
确认 被 试 了 解 实验 流程 、 操 作 方 式 并 能 流畅 操作 后 
进入 正式 实验 。 

实验 1 共有 4 组 实验 : 

(1) 平 面 地 图 实验 : 

中 无 手势 条 件 : 给 被 试 呈现 平面 地 图 及 路 线 ， 
要 求 被 试 将 双手 平 放 在 桌 上 ， 避 免 被 试 做 出 任何 手 
势 ， 同 时 要 求 被 试 学 习 该 路 线 。 

@ 产 生 追 踪 手 势 条件 : 给 被 试 呈现 平面 地 图 及 
路 线 ， 要 求 被 试 根据 路 线 的 方向 作出 相应 的 向 左 、 
向 右 或 向 前 的 追踪 手势 ， 并 学 习 该 路 线 。 

(2) 立 体 地 图 实验 : 

无 手势 条 件 : 给 被 试 呈 现 立体 地 图 路 线 视 频 ， 
要 求 被 试 将 双手 平 放 在 桌 上 ， 避 免 被 试 做 出 任何 手 
势 ， 同 时 要 求 被 试 学 习 该 路 线 。 

@ 产 生 追 踪 手 势 条 件 : 给 被 试 呈现 立体 地 图 路 
线 视频 , 并 要 求 被 试 根据 路 线 的 方向 作出 相应 向 
左 、 向 右 或 向 前 的 追踪 手势 ， 并 学 习 该 路 线 。 

每 组 实验 2 个 试 次 , 共有 8 个 试 次 。 所 有 条 件 
下 路 线 学 习 时 间 均 为 1 分 钟 。 

由 于 路 线 视 频 都 是 提前 录制 好 的 ， 因 此 每 个 被 
试 观看 的 视频 是 相同 的 。 每 段 视 频 结束 后 ， 都 要 求 被 


试 在 虚拟 地 图 中 通过 键盘 操纵 重复 走出 刚才 所 学 
的 路 线 , 同时 电脑 自动 记录 下 被 试 所 走 的 每 段 路 线 。 
实验 结束 后 对 被 试 表 示 感 谢 ， 并 发 放 一 定 被 试 费 。 
2.2 ”结果 

计算 被 试 在 视 空间 学 习 任 务 中 的 成 绩 ， 公 式 
(Wermeskerken et al., 2016) 如 下 : 

成 绩 -_ 正 确 路 线 数 错误 路 线 数 
正确 总 路 线 数 ” 地 图 总 路 线 数 

公式 中 的 正确 路 线 数 是 指 被 试 所 走路 线 中 正 
确 的 路 线 数量 ,正确 总 路 线 数 为 实验 材料 中 所 呈现 
的 总 路 线 数 ， 错 误 路 线 数 是 被 试 所 走路 线 中 与 所 呈 
现 路 线 不 符 的 路 线 数量 , 地 图 总 路 线 数 为 整 张 地 图 
的 全 部 可 走路 线 数 ， 成 绩 取 值 在 -1 到 1 之 间 。 

对 成 绩 进 行 2 (地 图 类 型 : 平面 地 图 、 立 体 地 
Al) x 3 (手势 : 无 手势 、 产 生 追 踪 手 势 ) x 2 (性 别 : 
男 、 女 ) 三 因素 混合 方差 分 析 , 同时 进行 了 贝 叶 斯 因 
子 分 析 作为 补充 。 结 果 表 明 ,， 手势 主 效应 显著 , FA, 
52) = 58.73, p < 0.001, mp = 0.53， 贝 叶 斯 因子 BFio 
= 16.64, 说 明 在 备 择 假设 下 出 现 当 前 数据 的 可 能 
性 是 零 假设 下 的 16.64 1%, 根据 Jeffreys (1961) 提 出 
的 分 类 标准 ， 有 和 较 强 的 证 据 支持 了 备 择 假设 ， 即 是 
否 产生 追踪 手势 在 视 空间 学 习 任 务 中 的 成 绩 差 异 
显著 , 产生 追踪 手势 的 成 绩 (M = 0.89) 显 著 好 于 无 
手势 成 绩 (M = 0.66); 地 图 类 型 主 效应 显著 , FC, 52) 
= 14.46, p < 0.001, np = 0.22， 贝 叶 斯 因子 BFio = 
15.50, 说 明 在 备 择 假设 下 出 现 当 前 数据 的 可 能 性 
是 零 假 设 下 的 15.50 倍 ， 有 和 较 强 的 证 据 支 持 了 备 择 
假设 ， 即 平面 地 图 成 绩 (M = 0.84) 好 于 立体 地 图 成 
绩 (M = 0.73); 性 别 主 效应 不 显著 , p> 0.05， 贝 叶 基 
因子 BFio = 0.38, 说 明 在 备 择 假设 下 出 现 当 前 数据 
的 可 能 性 是 零 假设 下 的 0.38 倍 ， 有 较 弱 的 证 据 支 持 
了 零 假设 ， 即 男性 和 女性 在 视 空间 学 习 任 务 中 的 成 
绩 没 有 显著 差异 。 
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手势 与 地 图 类 型 的 交互 作用 显著 ，F(1，52) = 
4.55, p = 0.03, n = 0.08， 贝 叶 斯 因子 BFio = 18.33, 
说 明 在 备 择 假设 下 出 现 当 前 数据 的 可 能 性 是 零 假 
设 下 的 18.33 倍 ， 有 和 较 强 的 证 据 支持 了 备 择 假设 。 
简单 效应 分 析 发 现 , 平面 地 图 条 件 下 是 否 产 生 追 踪 


图 ,使 被 试 更 易 形成 认 知 地 图 。 而 在 产生 追踪 手势 
的 条 件 下 , 平面 地 图 和 立体 地 图 的 路 线 学 习 成 绩 没 
有 显著 差异 ， 说 明 产 生 追 踪 手 势 不 仅 显著 提高 了 个 
体 的 视 空间 学 习 成 绩 , 还 使 立体 地 图 的 难度 降低 。 追 
踪 手 势 通过 提供 稳定 的 本 体感 受 和 视觉 反馈 ， 以 产 


手势 的 差异 显著 , F(1, 52) = 20.54, p < 0.001, n = 
0.28, 产生 追踪 手势 的 成 绩 (M = 0.91) 显 著 高 于 无 
手势 的 成 绩 (M = 0.74); 立体 地 图 条 件 下 是 否 产生 
追踪 手势 的 差异 显著 , F(1, 52) = 58.04, p < 0.001, 
Np = 0.53, 产生 追踪 手势 的 成 绩 (M = 0.87) 显 著 高 
于 无 手势 的 成 绩 (M = 0.59); 无 手势 条 件 下 平面 地 
图 和 立体 地 图 成 绩 差 异 显著 , FC, 52) = 12.14, p = 
0.001, ma = 0.19, 平面 地 图 的 成 绩 (M = 0.74) 显 著 高 
于 立体 地 图 的 成 绩 (M = 0.59); 而 产生 追踪 手势 条 
件 下 平面 地 图 与 立体 地 图 成 绩 差 异 不 显著 , p > 
0.05。 其 他 交互 作用 均 不 显著 , ps > 0.05。 

此 外 ,对 平面 地 图 和 立体 地 图 有 无 手势 的 路 线 
学 习 成 绩 差异 进行 比较 ， 即 对 平面 地 图 条 件 下 有 无 
手势 的 差 值 (d = 0.17) 和 立体 地 图 条 件 下 有 无 手势 
的 差 值 (d = 0.27) 进 行 了 成 对 样本 t 检 验 , t(1, 52) = 
一 2.13, p = 0.038, Cohen’s d=-0.37, 二 者 差异 显著 ， 
说 明 在 立体 地 图 条 件 下 产生 追踪 手势 对 视 空间 学 
习 的 提高 作用 显著 强 于 平面 地 图 条 件 ( 见 图 2)。 


口 无 追踪 手势 8 产生 追踪 手势 


图 2 不 同 手势 条 件 下 平面 地 图 和 立体 地 图 的 视 空间 学 
习 成 绩 差异 


2.3 ”讨论 

实验 1 结果 表明 , 无论 是 平面 地 图 还 是 立体 地 
图 条 件 下 , 产生 追踪 手势 都 可 以 显著 提高 被 试 的 视 
空间 学 习 成 绩 ， 且 产生 追踪 手势 对 立体 地 图 学 习 的 
增强 作用 要 高 于 平面 地 图 。 在 无 手势 的 条 件 下 ,被 
试 的 平面 地 图 路 线 学 习 成 绩 要 显著 高 于 立体 地 图 ， 
这 可 能 是 被 试 所 反映 的 立体 地 图 难度 较 大 所 导致 
的 ， 也 可 能 是 因为 平面 地 图 提供 了 俯 柳 式 的 路 线 


生 或 维持 与 任务 相关 的 信息 ， 从 而 降低 了 工作 记忆 
负荷 , 提高 了 视 空间 学 习 任务 的 绩效 (Clark, 2013)。 

实验 1 中 产生 追踪 手势 增强 平面 地 图 路 线 学 习 
的 结果 与 So 等 人 (2014) 通 过 手势 比划 路 线 来 促进 
平面 地 图 路 线 学 习 的 结果 基本 一 致 ,但 本 研究 在 前 
人 研究 基础 上 将 路 线 回 忆 改 为 路 线 重 走 ， 与 现实 生 
活 中 根据 平面 地 图 路 线 行进 的 方式 相似 ， 同 时 本 研 
究 还 增加 了 立体 地 图 路 线 学 习 ， 更 接近 日 常生 活 中 
的 视 空间 学 习 过 程 。 然 而 , 产生 追踪 手势 到 底 如 何 
提高 地 图 学 习 任务 的 绩效 仍 不 清楚 。 由 于 产生 追踪 
手势 在 立体 地 图 路 线 学 习 中 有 更 强 的 增强 作用 ,是 
前 人 只 关注 了 通过 手势 描画 平面 地 图 路 线 对 学 习 
的 促进 作用 ， 并 未 有 相关 研究 探索 产生 追踪 手势 在 
立体 地 图 路 线 学 习 方 面 的 作用 ,因此 本 研究 继续 采 
用 立体 地 图 开展 实验 2 的 研究 ， 以 澄清 产生 追踪 手 
势 对 视 空间 学 习 的 增强 机 制 。 


3 实验 2: 产生 追踪 手势 对 视 空间 
学 习 的 作用 机 制 


实验 2 主要 采用 遮挡 范式 进一步 漆 清 在 立体 地 
图 路 线 学 习 任 务 中 产生 追踪 手势 对 视 空间 学 习 的 
作用 机 制 。 本 实验 为 单 因素 (手势 : 无 手势 、 产 生 
但 遮挡 追踪 手势 、 产 生 且 不 遮挡 追踪 手势 ) 被 试 内 
设计 ,考察 追踪 手势 所 提供 的 视觉 信息 和 感觉 运动 
信息 在 视 空间 学 习 中 所 起 的 作用 。 
3.1 研究 方法 
3.1.1 ist 

使 用 G*Power 对 样本 量 进行 计算 ，effect size 
f= 0.4, a = 0.05, 1 一 B=0.95, 计算 出 所 需 样本 量 为 
36 人 。 

根据 计算 出 的 样本 量 重新 招募 陕西 省 某 高 校 
49 名 大 学 生 作为 被 试 参加 实验 。 被 试 均 为 右 利 手 ， 
年 龄 在 17 到 25 岁 之 间 (M = 19.83 岁 )， 其 中 男生 14 
名 , 女生 35 名 。 参 加 实验 的 被 试 视力 /矫正 视力 正 
常 ,无 红 绿 色 讶 或 色弱 的 情况 。 之 前 均 未 参与 过 相 
同 或 相似 的 实验 ， 且 不 知晓 研究 目的 。 
3.1.2 ”实验 材料 

(1) 地 图 学 习 任 务 

实验 2 的 地 图 学 习 任务 材料 与 实验 1 的 立体 地 
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图 路 线 学 习 任 务 材 料 类 似 。 共 有 6 条 路 线 ， 分 别 绘 
制 在 6 张 略 有 不 同 但 结构 相似 的 地 图 上 ， 每 条 路 线 
的 起 点 、 终 点 和 路 径 均 不 相同 。 每 条 路 线 都 有 8 个 
HE, 9 段 路 径 ， 路 线 皆 无 交叉 。 

(2) 挡 板 

使 用 白色 纸板 制作 五 面 封闭 、 前 方 开 一 半圆 口 
的 长 方 体形 状 盒子 ， 被 试 的 手 可 放 和 人 半圆 口中 ， 并 
能 在 盒子 中 自由 移动 。 在 正 坐 条 件 下 被 试 无 法 从 半 
圆 口内 看 到 自己 的 手势 。 此 挡 板 主要 用 于 遮 住 被 试 
对 自己 手势 的 观察 。 
3.1.3 ”实验 程序 

实验 2 地 图 学 习 任 务 的 程序 与 实验 1 中 的 立体 
地 图 路 线 学 习 部 分 大 致 相同 。 区 别 在 于 , 实验 2 分 
为 3 组 实验 : 

(1) 无 手势 条 件 : 路 线 视频 呈现 时 要 求 被 试 将 双 
手 平 放 在 桌面 上 , 不 做 任何 手势 ， 同 时 学 习 该 路 线 。 

(2) 产 生 但 遮挡 追踪 手势 条 件 : 给 被 试 呈现 路 线 
视频 时 ,要求 被 试 作出 相应 的 追踪 手势 , 但 使 用 挡 
板 遮 住 被 试 对 自身 手势 的 观察 ， 同 时 学 习 该 路 线 。 
(3) 产 生 且 不 遮挡 追踪 手势 条 件 : 呈现 路 线 视 
频 时 要 求 被 试 作出 相应 追踪 手势 , 不 对 手势 做 任何 
遮挡 ， 同 时 学 习 该 路 线 。 

每 组 实验 2 个 试 次 , 共有 6 个 斌 次。 所 有 条 件 
下 的 路 线 学 习 时 间 均 为 1 分 钟 。 
1 于 路 线 视频 都 是 提前 录制 好 的 ,因此 每 个 被 
试 观看 的 视频 是 相同 的 。 每 段 视 频 结束 后 ， 都 要 求 
被 试 在 虚拟 地 图 中 通过 键盘 操纵 重复 走出 刚才 所 
学 的 路 线 ， 同 时 电脑 自动 记录 被 试 所 走 的 每 段 路 线 。 
实验 结束 后 对 被 试 表 示 感 谢 ， 并 发 放 一 定 被 试 费 。 
3.2 ”结果 

对 成 绩 进 行 单 因 素 ( 手 势 : 无 手势 、 产 生 但 谈 
挡 追 踪 手 势 、 产 生 且 不 遮挡 追踪 手势 ) 方 差分 析 ， 同 
时 进行 了 贝 叶 斯 因子 分 析 作 为 补充 。 结 果 表 明 ，, 手 
势 主 效应 显著 , F(2, 47) = 24.05, p < 0.001, nå = 0.51, 
贝 叶 斯 因子 BFio = 19.44, 说 明 在 备 择 假设 下 出 现 
当前 数据 的 可 能 性 是 零 假设 下 的 19.44 倍 ， 有 较 强 
的 证 据 支 持 了 备 择 假设 ， 即 无 手势 、 产 生 但 遮挡 追 
踪 手 势 和 产生 且 不 遮挡 追踪 手势 在 视 空间 学 习 任 
务 中 的 成 绩 差异 显著 。 事 后 检验 结果 发 现 ,无 手势 
与 产生 但 遮挡 追踪 手势 差异 显著 ，P < 0.001, FDR 
校正 后 的 q < 0.001, 无 手势 的 成 绩 (M = 0.55) 显 著 
低 于 产生 但 遮挡 追踪 手势 的 成 绩 (M = 0.77); 无 手 
势 与 产生 且 不 遮挡 追踪 手势 差异 显著 ，p < 0.001, 
FDR 校正 后 的 gq < 0.001, 无 手势 的 成 绩 (M = 0.55) 


显 萌 低 于 产生 且 不 遮挡 追踪 手势 的 成 绩 (M = 0.86); 
产生 但 遮挡 追踪 手势 与 产生 且 不 遮挡 追踪 手势 差 
异 显 著 ,p = 0.039, FDR 校正 后 的 q = 0.039, 产生 但 
遮挡 追踪 手势 的 成 绩 (M = 0.77) 显 著 低 于 产生 且 不 
遮挡 追踪 手势 的 成 绩 CM = 0.86)。 总 体 而 言 , 产生 但 
遮挡 追踪 手势 和 产生 且 不 遮挡 追踪 手势 的 成 绩 都 
显著 高 于 无 手势 , 产生 且 不 遮挡 追踪 手势 的 成 绩 显 
著 高 于 产生 但 遮挡 追踪 手势 的 成 绩 ( 见 图 3)。 


产生 但 遮挡 ”产生 且 不 遮挡 
追踪 手势 追踪 手势 


图 3 不 同 手 势 条 件 下 视 空间 学 习 成 绩 比 较 


无 手势 


3.3 ”讨论 

实验 2 通过 比较 立体 地 图 路 线 学 习 任务 中 无 手 
势 、 产 生 但 遮挡 追踪 手势 和 产生 且 不 遮挡 追踪 手势 
条 件 下 的 成 绩 差 异 来 探究 产生 追踪 手势 对 视 空间 
学 习 的 增强 机 制 。 实 验 结果 表明 , 无 论 是 否 遮 挡 追 
踪 手 势 ， 产生 追踪 手势 都 可 以 提高 视 空 间 学 习 成 绩 ， 
其 成 绩 都 显著 高 于 无 手势 条 件 ， 此 结果 与 实验 1 的 
研究 结果 一 致 。 但 产生 且 不 遮挡 追踪 手势 的 成 绩 显 
著 高 于 产生 但 遮挡 追踪 手势 的 成 绩 ， 说明 追 踪 手 势 
所 提供 的 视觉 信息 和 感觉 运动 信息 共同 作用 于 视 空 
间 学 习 , 证 实 了 表象 维持 理论 对 手势 所 提供 的 视觉 
言 息 作用 的 推测 ,同时 补充 了 手势 的 具 身 认 知 理论 。 

实验 1 和 实验 2 的 结果 都 表明 产生 追踪 手势 对 
视 空间 学 习 有 较 强 的 增强 作用 ， 而 前 人 研究 多 集中 
于 通过 观察 他 人 追踪 手势 来 提高 平面 地 图 的 视 空 
BAIAR, 那么 观察 他 人 追踪 手势 是 否 能 增强 立 
体 地 图 的 视 空间 学 习 ? 观察 他 人 追踪 手势 和 以 自 
我 为 参照 产生 追踪 手势 何者 能 更 好 地 增强 视 空间 
学 习 ? 这 些 问 题 值得 进一步 探究 。 此 外 , 手势 的 具 
身 认 知 理论 还 认为 ,手势 可 以 提供 稳定 的 身体 存在 
感 ， 它 会 影响 正在 进行 的 思维 过 程 ,但 实验 2 未 能 
证 实 手势 是 否 通过 提供 身体 存在 感 增强 了 视 空 间 
学 习 。 为 进一步 探究 这 些 问题 ,本 研究 继续 开展 了 
实验 3 的 研究 。 
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4 实验 3: 追踪 手势 对 视 空间 学 习 
的 增强 方式 


为 进一步 探讨 增强 视 空间 学 习 的 有 效 方式 ， 实 
验 3 采用 单 因素 (手势 : 无 手势 、 观 察 他 人 追踪 手 
势 .产生 追踪 手势 ) 被 试 内 设计 ， 以 澄清 产生 追踪 手 
势 是 否 对 视 空 间 学 习 起 更 有 效 的 增强 作用 。 
41 研究 方法 
4.1.1 被 试 

使 用 G*Power 对 样本 量 进行 计算 ，effect size 
f= 0.4, a = 0.05, 1 一 B=0.95, 计算 出 所 需 的 样本 量 
为 36 人 。 

根据 计算 出 的 样本 量 重新 招募 陕西 省 某 高 校 
51 名 大 学 生 作为 被 试 参加 实验 。 被 试 均 为 右 利 手 ， 
年 龄 在 17 到 26 岁 之 间 (M = 19.88 2), 其 中 男生 20 
名 , 女生 31 名 。 参 加 实验 的 被 试 视力 /矫正 视力 正 
和 常 ,无 色盲 或 色弱 。 之 前 未 参与 过 相同 或 相似 的 研 
38, 且 并 不 知晓 研究 目的 。 
41.2 ”实验 材料 

实验 3 所 采用 的 地 图 学 习 任 务 材料 与 实验 2 
相同 。 

其 中 观察 他 人 追踪 手势 条 件 下 的 立体 地 图 路 
线 视频 是 在 无 手势 条 件 视频 的 基础 上 增加 了 他 人 
的 追踪 手势 。 
4.1.3 ”实验 程序 

实验 3 的 地 图 学 习 任 务 与 实验 2 大 致 相同 。 实 
验 3 共 有 3 组 实验 : 

(1) 无 手势 条 件 : 给 被 试 呈现 无 任何 手势 的 路 
线 视频 ， 要 求 被 试 将 双手 平 放 在 桌面 上 上， 防止 被 试 
做 出 手势 ， 同 时 学 习 该 路 线 。 

(2) 观 察 他 人 追踪 手势 条 件 : 给 被 试 呈现 带 有 
他 人 追踪 手势 的 路 线 视频 , 要 求 被 试 将 双手 平 放 于 
桌面 , 不 做 任何 手势 ， 只 观察 他 人 追踪 手势 ， 并 学 
习 该 路 线 。 

(3) 产 生 追 踪 手 势 条 件 : 给 被 试 呈现 无 手势 的 
路 线 视频 , 要 求 被 试 根据 路 线 的 方向 自己 做 出 相应 
的 追踪 手势 ， 并 学 习 该 路 线 。 

每 组 实验 2 个 试 次 , 共有 6 个 试 次 。 所 有 条 件 
下 的 路 线 学 习 时 间 均 为 1 分 钟 。 
1 于 路 线 视频 都 是 提前 录制 好 的 ,因此 每 个 被 
试 观看 的 视频 都 是 相同 的 。 每 段 视频 结束 后 ， 都 要 
求 被 试 在 虚拟 地 图 中 通过 键盘 操纵 重复 走出 刚才 
所 学 的 路 线 ， 电脑 自动 记录 被 试 所 走路 线 。 实 验 结 
束 后 对 被 试 表示 感谢 ， 并 发 放 一 定 被 试 费 。 


4.2 结果 
地 图 学 习 任 务 成 绩 的 描述 性 统计 结果 见 图 4。 


无 手势 ”观察 他 人 追踪 手势 产生 追踪 手势 
图 4 不 同 手势 条 件 下 视 空 间 学 习 成 绩 比 较 


对 成 绩 进行 单 因 素 (手势 : 无 手势 、 观 察 他 人 
追踪 手势 、 产 生 追 踪 手 势 ) 方 差分 析 ， 同 时 进行 了 贝 
叶 斯 因子 分 析 作 为 补充 。 结 果 表 明 ， 手势 主 效应 显 
著 , F(2, 49) = 26.65, p < 0.001, ni = 0.66, DUHH 
子 BFio = 27.56， 说 明 在 备 择 假设 下 出 现 当 前 数据 
可 能 性 是 零 假 设 下 的 27.56 倍 ,， 有 非常 强 的 证 据 支 
持 了 备 择 假设 即 无 手势 、 观 察 他 人 追踪 手势 、 产 
生 追 踪 手 势 在 视 空间 学 习 任 务 中 的 成 绩 差异 显著 。 
事后 检验 结果 发 现 , 无 手势 与 观察 他 人 追踪 手势 差 
异 显著 ,p = 0.014, FDR 校正 后 的 q= 0.014, 无 手势 
的 成 绩 (M = 0.57) 显 著 低 于 观察 他 人 追踪 手势 的 成 
绩 (M = 0.69); 无 手势 与 产生 追踪 手势 差异 显著 , p 
< 0.001, FDR 校正 后 的 q < 0.001, 无 手势 的 成 绩 (M 
= 0.57) 显 著 低 于 产生 追踪 手势 的 成 绩 (M = 0.88); 
观察 他 人 追踪 手势 与 产生 追踪 手势 差异 显著 , p < 
0.001, FDR 校正 后 的 q < 0.001, 观察 他 人 追踪 手势 
的 成 绩 (M = 0.69) 显 著 低 于 产生 追踪 手势 的 成 绩 (M 
= 0.88)。 

4.3 讨论 

实验 3 通过 比较 无 手势 、 观 察 他 人 追踪 手势 和 
产生 追踪 手势 探究 了 何 种 方式 能 更 有 效 地 增强 视 
空间 学 习 。 实 验 结果 表明 ， 以 自我 为 参照 产生 追踪 
手势 的 效果 显著 好 于 观察 他 人 追踪 手势 ， 这 说 明 以 


+ 


自我 为 参照 产生 追踪 手势 是 一 种 效果 更 优 的 视 空 
间 学 习 增强 方式 。 


还 应 注意 到 的 是 ， 相 比 于 观察 他 人 追踪 手势 ， 
产生 追踪 手势 有 更 强 的 身体 存在 感 , 产生 追踪 手势 
的 增强 作用 更 强 说 明 增 强身 体 存在 感 可 以 增强 视 
空间 学 习 ,， 这 进一步 验证 了 手势 的 具 身 认 知 理论 的 
观点 。 且 相 比 于 仅 观 察 他 人 追踪 手势 ， 以 自我 为 参 
照 产生 追踪 手势 所 提供 的 感觉 运动 信息 更 加 丰富 ， 
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说 明 追 踪 手 势 所 提供 的 感觉 运动 信息 在 视 空 间 学 
习 中 的 增强 作用 更 显著 ,进一步 验证 和 补充 了 实验 
2 的 结果 ,同时 也 扩充 了 手势 的 具 身 认 知 理论 。 


5 总 讨论 


我 们 日 常生 活 中 的 许多 活动 和 任务 都 会 使 用 
到 空间 能 力 ， 特别 是 在 路 线 学 习 和 重 走 的 过 程 中 ， 
视 空间 能 力 更 是 至 关 重 要 。 而 对 于 一 部 分 空间 能 
较 低 的 个 体 而 言 ， 如果 所 处 的 环境 比较 陌生 ， 就 很 
容易 迷失 方向 。 因 此 ,通过 一 些 外 在 手段 帮助 他 们 
增强 视 空间 学 习 很 有 必要 。 本 研究 采用 地 图 学 习 任 
务 作为 主要 范式 , 通过 3 个 实验 分 别 探究 了 产生 追 
踪 手 势 对 视 空间 学 习 的 增强 作用 、 增 强 机 制 以 及 增 
强 方法 。 
5.1 产生 追踪 手势 对 视 空间 学 习 的 增强 作用 

实验 1 首先 探讨 了 产生 追踪 手势 是 否 对 平面 地 
图 和 立体 地 图 的 视 空间 学 习 都 起 到 增强 作用 。 实验 
1 分 别 在 平面 地 图 和 立体 地 图 条 件 下 考察 了 产生 追 
踪 手 势 的 作用 , 结果 与 本 研究 的 假设 一 致 ， 无 论 是 
平面 地 图 还 是 立体 地 图 , 产生 追踪 手势 都 对 视 空间 
学 习 有 增强 作用 。 具 体 而 言 , 与 无 手势 条 件 相 比 ， 
产生 追踪 手势 显著 改善 了 个 体 对 路 线 的 学 习 和 记 
忆 ,， 特 别 是 在 立体 地 图 的 路 线 学 习 过 程 中 其 效果 更 
优 。 平 面 地 图 的 路 线 学 习 结 果 与 前 人 (So et al., 2014) 
的 结果 一 致 。 而 对 于 立体 地 图 的 路 线 学 习 ， 由 于 该 
过 程 与 真实 的 路 线 行走 过 程 十 分 相似 ， 因 此 产生 追 
踪 手 势 可 能 在 实际 的 路 线 学 习 过 程 中 也 起 到 增强 
作用 ,使 结果 具有 较 高 的 生态 效 度 。 此 外 ,在 无 手 
势 条 件 下 , 平面 地 图 的 路 线 学 习 成 绩 要 显著 高 于 立 
体 地 图 ,这 可 能 是 由 于 呈现 乌 柳 式 的 平面 地 图 更 有 
助 于 个 体形 成 认 知 地 图 ， 从 而 能 帮助 个 体 更 好 地 学 
习 路 线 。 因 此 在 条 件 允 许 的 情况 下 ,在 学 习 路 线 时 
呈现 平面 地 图 十 分 有 利于 个 体 的 视 空 间 学 习 。 对 于 
地 图 学 习 界 面 的 设计 而 言 ， 在 提供 实景 路 线 学 习 时 
可 以 辅 以 平面 小 地 图 ， 以 帮助 个 体 更 好 了 解 自身 位 
置 和 路 线 情况 ,使 学 习 过 程 更 加 顺利 。 
5.2 ”产生 追踪 手势 对 视 空间 学 习 的 增强 机 制 

在 前 人 研究 的 基础 上 ,本 研究 还 试图 回答 关于 
产生 追踪 手势 的 作用 机 制 问 题 。 虽然 前 人 研究 都 提 
到 手势 确实 具有 认 知 功能 , 但 在 前 人 的 描述 中 ,这 
种 手势 通常 是 指 手势 的 神经 前 导 ( 即 前 运动 )。 而 有 
研究 表明 , 手势 具有 激活 内 部 动作 表征 的 认 知 作用 
(Goldin-Meadow & Beilock, 2010)。 虽 然 前 人 研究 对 
手势 的 功能 做 过 诸多 探讨 , 但 手势 能 实现 这 一 功能 


的 原因 及 其 作用 机 制 还 没有 一 个 清晰 的 解释 。 

基于 表象 维持 理论 和 手势 的 具 身 认 知 理论 ， 本 
研究 认为 ,手势 产生 的 外 部 身体 表象 在 某 种 程度 上 
支持 了 内 部 认 知 过 程 ， 而 手势 所 提供 的 视觉 信息 和 
感觉 运动 信息 共同 支持 了 该 认 知 过 程 ， 且 身体 存在 
感 也 在 此 过 程 中 发 挥 作用 。 实验 2 通过 遮挡 范式 探 
究 了 产生 追踪 手势 在 视 空 间 学 习 中 的 增强 机 制 。 结 
REM, 无 论 是 否 遮 挡 追 踪 手 势 , 产生 追踪 手势 都 
可 以 提高 视 空间 学 习 成 绩 。 产生 且 不 遮挡 追踪 手势 
的 成 绩 显著 高 于 产生 但 遮挡 追踪 手势 的 成 绩 ， 说 明 
产生 追踪 手势 所 提供 的 视觉 信息 和 感觉 运动 信息 
共同 作用 于 视 空间 学 习 。 实验 3 在 提供 视 空间 学 习 
增强 方式 的 基础 上 , 也 进一步 补充 了 实验 2 的 结果 ， 
以 自我 为 参照 产生 追踪 手势 对 视 空间 学 习 的 增强 
作用 远 高 于 观察 他 人 追踪 手势 ， 说明 追踪 手势 所 提 
供 的 视觉 信息 和 感觉 运动 信息 在 视 空间 学 习 中 都 
起 作用 , 但 感觉 运动 信息 的 作用 更 显著 , 且 产 生 追 
踪 手 势 所 提供 的 身体 存在 感 在 这 一 过 程 中 也 发 挥 
着 一 定 的 作用 。 

表象 维持 理论 认为 手势 可 能 在 维持 空间 表象 
方面 有 一 定 作 用 。Wesp 等 人 (2001) 提 出 手势 具有 
“刷新 ”视觉 空间 模板 的 功能 ， 可 以 维持 工作 记忆 中 
表象 的 激活 。 身 体 动 作 的 产生 支持 了 内 部 空间 表象 
的 维持 ， 没 有 身体 姿势 ， 内 部 空间 表象 会 变 得 不 稳 
定 ， 其 激活 可 能 衰减 。 但 手势 并 不 是 必要 的 , 它 只 
是 帮助 维持 空间 概念 ， 较 短 的 处 理 时 间 可 能 不 需要 
手势 来 维持 ， 空 间 表象 只 有 在 它们 被 转换 成 另 一 种 
表现 形式 时 才 有 必要 。 此 外 , Wesp 等 人 还 推测 ， 手 
势 所 提供 的 视觉 表象 与 运动 没有 密切 联系 ， 也 不 会 
受到 运动 反应 的 影响 。 

实验 2 和 实验 3 结果 证 明 , 在 产生 且 不 遮挡 追 
踪 手 势 和 观察 他 人 追踪 手势 的 条 件 下 ,追踪 手势 所 
提供 的 视觉 信息 可 以 帮助 维持 工作 记忆 中 表象 的 
激活 ,通过 追踪 手势 将 空间 信息 保留 在 视觉 空间 模 
板 中 ， 从 而 增强 了 视 空 间 学 习 ， 即 对 地 图 路 线 的 记 
忆 。 这 说 明 表 象 维持 理论 可 以 较 好 地 解释 观察 追踪 
手势 的 作用 机 制 。 

然而 , 实验 结果 发 现 , 使 产生 追踪 手势 起 增强 
作用 的 不 只 是 追踪 手势 所 提供 的 视觉 信息 ,还 包括 
感觉 运动 信息 ， 这 与 Waller 等 人 (2004) 以 及 Ruddle 
和 Lessels (2009) 研 究 中 关于 运动 信息 对 视 空 间 学 
习 起 促进 作用 的 结果 一 致 。 且 实验 3 结果 表明 , 感 
觉 运 动 信 息 和 身体 存在 感 在 增强 视 空间 学 习 中 所 
起 到 的 作用 比 单纯 提供 视觉 信息 的 作用 更 大 ， 即 相 
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手势 对 视 空间 学 习 有 更 大 的 增强 作用 。 由 此 可 见 ， 
表象 维持 理论 可 以 在 某 种 程度 上 解释 手势 对 认 知 
过 程 的 增强 作用 , 但 产生 追踪 手势 的 作用 机 制 远 比 
表象 维持 理论 所 描述 的 更 加 复杂 ,而 Wesp 等 人 的 
理论 也 没有 提供 更 多 详细 的 解释 。 

手势 的 具 身 认 知 理论 则 认为 , 认 知 系统 是 一 个 
耦合 的 脑 - 身 体 -外 部 世界 的 系统 ,涉及 到 当前 大 
脑 、 身 体 和 环境 状态 之 间 的 互动 , 它 不 是 单 向 的 ， 
而 是 相互 的 (Bredo, 1994; Clark, 2013)， 即 认 知 系统 
与 身体 和 环境 是 协同 工作 的 。 手 势 作 为 耦合 的 脑 - 
身体 的 重要 组 成 部 分 是 思维 过 程 的 延伸 。 通 过 产 
生 手 势 可 以 影响 正在 进行 的 思考 和 推理 。 手 势 提供 
了 一 种 稳定 的 身体 存在 感 ， 体 现 了 认 知 任务 的 特定 
方面 。 手势 不 仅 是 一 种 使 语言 和 思想 内 容 外 化 的 方 
式 , 还 能 暂时 帮助 维持 认 知 稳定 性 。 手势 是 具 身 的 ， 
它 通 过 提供 稳定 的 本 体感 受 和 视觉 反馈 来 产生 或 
维持 与 任务 相关 的 信息 ， 因 此 手势 可 以 实现 一 种 认 
知 功能 ， 即 手势 产生 的 外 部 身体 表象 在 某 种 程度 上 
能 文 持 内 部 认 知 过 程 。 

Clark (2013) 还 提出 , 手势 之 所 以 能 支持 内 部 
认 知 过 程 ， 是 因为 它 可 以 使 工作 记忆 负荷 最 小 化 。 
当 外 部 信息 可 以 直接 获取 且 过 程 较为 简便 时 , 个 体 
会 主要 依赖 于 从 外 部 检索 信息 ， 因 为 它 可 以 减少 在 
任务 中 所 犯 的 错误 ; 当 外 部 信息 只 能 间接 获得 时 ， 
个 体 便 开始 依赖 于 内 部 记忆 ， 这 可 能 会 导致 大 量 的 
错误 。 这 表明 人 们 可 能 会 选择 最 快 的 解决 问题 策略 
认 知 系统 倾向 于 用 最 少 的 努力 来 获取 解决 问题 的 
资源 (Clark, 2008)。 人 情境 的 约束 导致 了 决策 的 权衡 ， 
即 认 知 系统 是 依赖 于 环境 信息 还 是 内 部 记忆 主要 
取决 于 环境 (Wilson, 2002)。 当 内 部 认 知 需求 增加 时 ， 
个 体 就 很 可 能 使 用 外 部 调节 的 认 知 策略 。 但 这 种 外 
部 支持 只 有 在 复杂 任务 时 才 有 效 ， 特 别 是 对 空间 能 
力 较 低 的 个 体 。 因 此 ， 当 认 知 需求 较 高 时 ， 外 部 支 
持 尤 其 有 帮助 。 

这 种 手势 能 够 减轻 认 知 负荷 的 解释 可 以 帮助 
进一步 前 释 本 研究 的 结果 。 空间 工作 记忆 负责 视觉 
和 空间 信息 的 临时 存储 和 操作 (Baddeley, 2003)， 很 
多 研究 者 认为 这 种 记忆 系统 是 表象 生成 的 主要 原 
因 (Cattaneo et al., 2006)。 当 需要 学 习 的 路 线 较 长 时 ， 
个 体 的 空间 工作 记忆 负荷 较 大 ,此 时 产生 追踪 手势 
作为 一 种 外 部 调节 策略 ， 通 过 提供 稳定 的 本 体感 受 
和 视觉 反馈 , 产生 并 维持 了 与 任务 相关 的 信息 ， 支 
持 了 内 部 表征 的 稳定 性 , 减轻 了 个 体 的 空间 工作 记 


空间 学 习 。 特别 是 对 于 立体 地 图 的 学 习 ， 其 难度 大 ， 
不 易 形成 相应 的 认 知 地 图 ,使 得 被 试 的 空间 工作 记 
忆 负 和 荷 更 大 ， 而 追踪 手势 的 加 入 极 大 地 降低 了 被 试 
的 空间 工作 记忆 负荷 ， 使 被 试 的 任务 成 绩 有 了 显著 
提升 。 

此 外 , 在 过 去 关于 空间 能 力 的 性 别 差异 研究 中 
发 现 ， 男 性 的 空间 能 力 略 高 于 女性 ， 一 些 研究 者 认 
为 这 种 差异 可 能 与 空间 工作 记忆 有 关 ,， 并 且 只 在 空 
间 工 作 记 忆 负 蓓 很 高 时 才 会 出 现 (Coluccia & Louse, 
2004)。 但 另 一 些 研究 者 认为 ,性 别 的 影响 主要 与 不 
同 策略 的 使 用 有 关 , 通常 发 现 的 性 别 差异 并 不 是 能 
力 水 平 本 身 的 差异 ， 而 在 于 男性 和 女性 所 考虑 的 信 
息 类 型 不 同 。 女 性 更 偏好 使 用 地 标 信息 ， 而 男性 更 
多 地 考虑 几何 信息 。 当 需要 处 理 更 多 的 几何 信息 时 ， 
男性 可 能 会 比 女 性 表现 更 好 ; 但 当 视 空间 学 习 过 程 
依赖 地 标 信息 的 处 理 时 ,男性 和 女性 就 会 有 相同 水 
平 的 任务 表现 (Sandstrom et al., 1998; van der Ham 
et al., 2020)。 

本 研究 发 现 , 在 没有 地 标的 情况 下 , 虽然 男性 
的 视 空间 学 习 成 绩 都 略 高 于 女性 , 但 产生 追踪 手势 
时 男性 和 女性 的 成 绩 差 异 远 小 于 无 手势 时 ， 这 说 明 
空间 能 力 的 性 别 差异 可 能 与 空间 工作 记忆 有 关 。 当 
产生 追踪 手势 时 , 追踪 手势 减轻 了 个 体 的 空间 工作 
记忆 负荷 ， 从 而 在 提高 视 空间 学 习 成 绩 的 同时 减少 
了 性 别 差异 。 

然而 , 手势 的 具 身 认 知 理论 没有 对 手势 复杂 的 
作用 机 制 做 出 进一步 的 解释 ， 即 手势 是 通过 什么 类 
型 的 信息 来 支持 内 部 认 知 过 程 的 。 本 研究 通过 实验 
2 的 遮挡 范式 证 明 , 追踪 手势 所 提供 的 视觉 信息 和 
感觉 运动 信息 共同 作用 于 视 空间 学 习 过 程 ， 且 感觉 
运动 信息 作用 更 强 , 这 进一步 补充 了 手势 的 具 身 认 
知 理论 。 但 目前 尚 不 清楚 地 是 , 手势 是 如 何 促进 表 
象 激活 的 。 人 研究 表明 ,观察 身体 各 部 位 的 动作 可 以 
激活 大 脑 项 叶 和 运动 前 区 ， 从 而 可 以 模拟 动作 
(Gazzola et al., 2006; Goldenberg & Karnath, 2006)。 
此 外 , 在 观察 其 他 物种 (Buccino et al., 2004) 甚 至 是 
HLA A(Demiris & Simmons, 2006) 时 ， 这些 脑 区 同 
样 会 激活 。 在 回忆 之 前 观察 到 的 动作 时 , 手 的 动作 
与 之 前 观察 到 的 动作 相 一 致 可 以 促进 想象 。 未 来 可 
以 通过 ERP. fMRI 和 fNIRS 等 技术 进一步 探究 追 
踪 手 势 对 视 空间 学 习 的 作用 机 制 问 题 。 

5.3 ”基于 追踪 手势 的 视 空间 学 习 增 强 方式 

关于 视 空间 学 习 的 增强 方式 , 前 人 主要 通过 使 
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用 空间 语言 、 描 绘 地 图 和 观察 他 人 追踪 手势 等 方法 
来 促进 个 体 的 视 空间 学 习 。 而 现实 生活 中 , 在 没有 
平面 地 图 的 情况 下 , 产生 追踪 手势 就 成 为 一 种 更 易 
得 且 便 利 的 视 空间 学 习 增 强 方 法 ,因此 本 研究 通过 
比较 观察 他 人 追踪 手势 和 以 自我 为 参照 产生 追踪 
手势 在 视 空间 学 习 中 的 作用 ,探索 了 如 何在 没有 其 
他 外 部 条 件 辅助 的 情况 下 更 好 地 帮助 个 体 学 习 路 
线 , 提高 视 空间 学 习 成 绩 。 

实验 3 比较 了 无 手势 、 观 察 他 人 追踪 手势 和 以 
自我 为 参照 产生 追踪 手势 对 视 空间 学 习 任 务 的 影 
响 ， 所 得 结果 与 先前 的 假设 相同 ， 以 自我 为 参照 产 
生 追 踪 手 势 对 视 空间 学 习 的 增强 效果 最 强 ， 即 与 无 
手势 和 观察 他 人 追踪 手势 相 比 ， 以 自我 为 参照 产生 
追踪 手势 显著 地 改善 了 对 路 线 的 回忆 ， 而 观察 他 人 
追踪 手势 对 视 空 间 学 习 也 有 一 定 的 提高 作用 , 但 作 
用 效果 不 如 产生 追踪 手势 。 这 说 明 相 比 于 观察 他 人 
追踪 手势 ， 以 自我 为 参照 产生 追踪 手势 是 一 种 效果 
更 佳 的 视 空间 学 习 增 强 方式 。 

以 往 研 究 多 关注 观察 他 人 追 踊 手 势 对 平面 地 
图 路 线 学 习 的 影响 ， 如 Wermeskerken 等 人 (2016) 的 
研究 ， 而 产生 追踪 手势 在 立体 地 图 视 空间 学 习 中 的 
作用 研究 很 少 。 本 研究 的 结果 一 方面 进一步 验证 了 
前 人 关于 观察 他 人 追踪 手势 在 视 空间 学 习 过 程 中 
起 到 增强 作用 这 一 结果 ， 另 一 方面 也 补充 了 前 人 研 
究 的 空白 , 增添 了 以 自我 为 参照 产生 追踪 手势 这 一 
方式 在 立体 地 图 路 线 学 习 过 程 中 作用 的 研究 ， 并 证 
明 产生 追踪 手势 是 比 观 察 他 人 追 踊 手势 效果 更 好 
的 一 种 路 线 学 习 方 式 。 且 在 现实 生活 中 , 在 进行 视 
空间 学 习 时 通常 没有 他 人 的 手势 作为 辅助 学 习 条 
件 ， 以 自我 为 参照 产生 追踪 手势 不 仅 更 易 获 得 , 无 
需 依 赖 他 人 ,而且 效 果 极 佳 , 作为 一 种 外 部 调节 策 
略 可 以 很 好 地 帮助 个 体 记忆 和 回忆 路 线 。 

未 来 在 试图 增强 个 体 视 空 间 学 习 的 过 程 中 ， 可 
以 通过 让 个 体 产 生 追 踪 手 势 的 方式 来 提升 对 路 线 
的 学 习 效 果 。 在 空间 导航 界面 的 设计 方面 ,也 可 以 
尝试 将 指示 箭头 改 为 追踪 手势 , 通过 增加 一 定 的 纺 
体 存 在 感 帮助 个 体 更 好 地 进行 导航 从 而 提高 绩效 
和 用 户 体验 。 
54 ”局限 与 展望 

首先 , 本 研究 仅 选 取 了 大 学 生 被 试 群体 ,未 对 
其 他 年 龄 段 的 个 体 进行 抽样 和 研究 ,特别 是 对 于 认 
知 功能 有 所 下 降 的 老年 人 ,这 种 相对 简单 的 增强 方 
式 可 能 在 便利 其 生活 方面 更 有 意义 。 其 次 , 本 研究 
虽然 采取 了 相对 更 具 生 态 效 度 的 立体 地 图 作为 实 


验 材 料 , 但 使 用 键盘 来 操纵 第 一 视角 的 行走 与 现实 
生活 中 的 视 空间 学 习 和 行走 过 程 仍 存 在 不 小 的 差 
E, 未 来 在 条 件 允 许 的 情况 下 ,可 以 通过 创造 现实 
场景 来 进一步 考察 产生 追踪 手势 对 视 空间 学 习 的 
作用 。 再 次 ， 本 研究 未 考虑 地 域 差异 问题 。 对 于 生 
活 在 不 同 地 域 的 个 体 使 用 的 视 空间 学 习 策略 可 能 
存在 较 大 差异 ,例如 生活 在 平原 地 区 的 个 体 可 能 
多 使 用 东南 西北 来 指示 方向 并 进行 导航 ,而 对 于 生 
活 在 多 山 或 丘陵 地 区 的 个 体 可 能 更 多 使 用 地 标 或 
其 他 策略 来 学 习 路 线 ， 因 此 产生 追踪 手势 所 起 的 作 
用 也 可 能 存在 差异 。 最 后 ， 本 研究 仅 从 行为 实验 的 
层面 对 产生 追踪 手势 的 增强 机 制 进行 了 探究 ， 主 要 
关注 了 与 日 常生 活 更 为 相近 的 立体 地 图 路 线 学 习 ， 
未 来 可 以 用 ERP. fMRI 和 fNIRS 等 设备 从 神经 生 
理 层面 进一步 开展 平面 地 图 和 立体 地 图 路 线 学 习 
的 脑 机 制 研究 ， 验 证 和 补充 手势 的 具 身 认 知 理论 的 
观点 , 解释 产生 追踪 手势 对 平面 地 图 和 立体 地 图 路 
线 学 习 促进 作用 的 差异 ,特别 是 关于 手势 如 何 促 进 
表象 激活 以 及 身体 存在 感 等 方面 的 脑 研 究 ， 增 加 相 
关 的 实证 证 据 。 


6 结论 


本 研究 通过 3 个 实验 证 实 了 产生 追踪 手势 对 视 
空间 学 习 的 增强 作用 , 并 探究 了 追踪 手势 增强 作用 
的 产生 主要 与 其 所 提供 的 视觉 信息 和 感觉 运动 信 
EHX, 很 好 地 支持 了 手势 的 具 身 认 知 理论 ,还 进 
一 步 解 决 了 采用 何 种 方式 能 更 好 地 提高 视 空 间 学 
习 成 绩 的 问题 ， 即 以 自我 为 参照 产生 追踪 手势 是 效 
采 更 佳 的 视 空间 学 习 增强 手段 ,对 于 空间 能 力 较 低 
的 个 体 而 言 可 以 更 好 地 帮助 他 们 进行 视 空间 学 习 ， 
避免 迷失 方向 。 
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Abstract 

Visuo-spatial ability is the main component of spatial cognitive ability, which forms the spatial model of 
external world in human brain and think in mind through the transformation of model paradigm. However, when 
there are few landmarks or reference objects in an unfamiliar environment, individuals with low visuo-spatial 
ability are often prone to get lost. So, for these individuals with low visuo-spatial ability, how to solve this 
problem is worth exploring. Previous researches have shown that gestures help individuals to learn. However, 
most studies focused on improving the ability of route learning by observing tracking gestures, while there were 
few studies exploring the effect of generating tracking gestures, and there was no research exploring the role of 
generating tracking gestures in route learning on 3D maps. 

The route learning task was adopted as the main paradigm in the present study to explore the enhancing 
effect of generating tracking gestures in the route learning process of 3D map. A total of 53 participants were 
recruited in Experiment 1 to explore the improving effect of generating tracking gestures on visuo-spatial 
learning of 2D map and 3D map. In Experiment 2, another 49 participants were recruited to investigate the 
enhancing mechanism of generating tracking gestures in route learning using occlusion paradigm. Experiment 3 
recruited another 53 participants to explore the methods of enhancement of visuo-spatial learning based on 
tracking gesture. 

The results of Experiment 1 showed that generating tracking gestures significantly improve the 
performance of visuo-spatial learning in both 2D map and 3D map, and the enhancing effect of generating 
tracking gesture on route learning of 3D map was higher than that of 2D map. Experiment 2 revealed that 
visuo-spatial learning was enhanced by the visual information and sensorimotor information provided by 
tracking gestures. The results of Experiment 3 showed that the enhancing effect of generating self-referential 
tracking gestures was significantly higher than that of observing others' tracking gestures, and it also proved that 
enhancing physical presence can improve the effect of visuo-spatial learning. 

In summary, these results suggest that (1)generating tracking gestures can enhance visuo-spatial learning; 
(2)visual information and sensorimotor information provided by tracking gestures play important roles in 
visuo-spatial learning, which confirms image maintenance theory and further complements the embodied 
embodied-external cognitive perspective of gesture; (3)increasing physical presence can enhance visuo-spatial 
learning, which validates the embodied-external cognitive perspective of gesture; (4)compared with observing 
other's tracking gestures, generating self-referential tracking gestures has a better performance, that is, 
generating self-referential tracking gestures is a more effective way to improve visuo-spatial learning. 

Key words generating tracking gesture, visuo-spatial learning, image maintenance theory, embodied-external 
cognitive perspective of gesture 


